Du là thành viên của sĩ tộc họ Vương ở quận Lang Tà. Ông tổ 8 đời là Vương Đạo, được làm đến Thừa tướng nhà Đông Tấn. Ông tổ 7 đời là Vương Hiệp, được làm đến Trung lĩnh quân. Ông tổ 6 đời là Vương Tuần, được làm đến Tư đồ. Từ Vương Đạo đến Vương Tuần phục vụ nhà Đông Tấn.

Ông tổ 5 đời là Vương Hoằng, được làm đến Thái bảo nhà Lưu Tống. Ông kỵ là Vương Tích, được làm đến Giang Hạ nội sử.

Ông cụ là Vương Tăng Diễn, được làm đến Thị trung nhà Nam Tề. Ông nội là Vương Mậu Chương, được làm đến Cấp sự Hoàng môn thị lang, lấy em gái của Tiêu Diễn (sau này là Lương Vũ đế) là Tiêu thị (mất sớm vào đời Tề, được truy tặng tước Tân An công chúa) làm vợ.

Cha là Vương Xung, được làm đến Tư không nhà Lương. Xung có 30 con trai, Du là người thứ 13.